|
1.
基于Hadoop的海量MP3文件存储架构研究
赵晓永 杨扬 孙莉莉 陈宇
计算机应用
2012, 32 (06):
1724-1726.
DOI: 10.3724/SP.J.1087.2012.01724
MP3作为数字音乐时代的事实标准,数量已相当巨大,用户的访问需求也与日俱增,有效存储和管理海量的MP3文件,为用户提供良好的体验,越来越引起人们的关注。Hadoop的出现,提供了一种新的思路。但由于Hadoop自身并不适合海量小文件处理,提出一种基于Hadoop的海量MP3文件存储架构,充分利用MP3文件自身包含的丰富描述信息,通过预处理模块的归类算法,将小文件归并到Sequence File中,同时引入高效的索引机制,很好地解决了小文件过多时NameNode内存瓶颈问题。实验证明,该架构能达到良好的效果。
相关文章 |
多维度评价
|
|